Objectifs d'apprentissage
- Comparer les architectures : Différencier les réseaux de neurones récurrents (RNN), les LSTM et l'architecture Transformer.
- Mécanisme d'attention auto-associative : Expliquer l'article « Attention Is All You Need » et les mécanismes d'attention auto-associative.
- Encodeurs et décodeurs : Comprendre le rôle des encodeurs et des décodeurs dans des modèles comme BERT et GPT.